岗位职责:
职位描述:
1、熟悉 javascript, html, css, xml,json等多种网页技术和数据协议;
2、精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息;
3、熟悉C# / Java / Python 语言3选1,有过爬虫系统开发经验的优先。
4、熟练掌握数据库开发,对数据处理和数据质量有较深认识;精通至少一种主流数据mongo,redis,mysql数据库;
5、熟悉多线程、多进程、网络通信编程相关知识;
6、对网站的反爬虫策略有一定的研究,能够总结分析不同网站,网页的结构特点及规律;
任职要求:
1、大专以上学历,具备ebay,速卖通,亚马逊或外贸电商行业2年及以上工作经验者优先考虑;
2、掌握Scrapy、Webmagic、Pyspider等开源框架,精通Python语言,熟悉网络编程;
3、对数据挖掘和机器学习算法方面有一定了解;
4、热衷于电商行业,能敏锐的抓住市场的发展趋势,能熟练应用办公软件及第三方软件进行市场及平台数据分析,开发出更多的热销产品。
5、身体健康,有上进心,有良好的沟通能力,逻辑思维能力和团队协作能力
6、熟练python、java等编程语言,有2年以上的python爬虫开发经验